Title: Psychology / Diagnostik II / 04_Verhaltensbeobachtung

Q: Ziel der Verhaltensbeobachtung nach Höft & Kersting (2017): Verfahren zur Eignungsbeurteilung so gestalten, dass [...] reduziert werden und letztlich die Wahrscheinlichkeit für [...] steigt.
A: Fehlereinflüsse; eine hohe Gültigkeit der getroffenen
Aussagen

Q: Schmidt-Atzert & Amelang (2012): Verhaltensbeobachtung liefert im Idealfall Fakten, die frei von [...] sind.
A: Bewertungen
Extra: Diese Zielsetzung impliziert eine wichtige Unterscheidung zwischen Beobachtung vs.
Beurteilung

Q: In welche 3 Schritte würde man eine Verhaltensbeobachtung nach der Idealvorstellung Schmidt-Atzert & Amelang (2012) einteilen?
A: 1. Wahrnehmen
2. Registrieren/Protokollieren
3. Beurteilen

Q: Welche 3 Phasen gibt es bei der Vorbereitung einer Verhaltensbeobachtung?
A: 1. Operationalisierungen der Zielmerkmale
2. Art der Registrierung/Protokollierung festlegen
3. Beurteilungsregeln festlegen

Q: Welche 3 Schritte hat die Operationalisierungen der Zielmerkmale (bei der Vorbereitung einer Verhaltensbeobachtung)?
A: 1. Indikatoren festlegen
2. Differenzierungslevel festlegen ("kratzen, schlagen" vs. "körperlich verletzen" vs. "aggressives Verhalten zeigen")
3. Indikatorengüte prüfen (Validität, Objektivität, Reliabilität)

Q: Wofür wird die Critical Incident Technique (CIT) typischerweise genutzt?
A: Verhaltensnahe Indikatoren für erfolgskritische Situationen generieren
("Methode der kritischen Ereignisse")

Q: Wie unterscheiden sich der Bottom-Up-Ansatz (induktiv) und der Top-Down-Ansatz (deduktiv) in der Critical Incident Technique (CIT)?
A: Bottom Up: Merkmale / Eigenschaften sind noch nicht vorhanden → Ableitung der Merkmale und Indikatoren aus konkreten Situationen
Top Down: Merkmale / Eigenschaften sind schon vorhanden (Fragestellung, Kompetenzmodell) → Ableitung der Indikatoren aus konkreten Situationen

Q: Welchen Vorteil hat der Bottom-Up-Ansatz gegenüber dem Top-Down-Ansatz in der Critical Incident Technique (CIT)?
A: Bottom up: Merkmale werden aus Zielsetzung gewonnen (Versuchen Sie sich bitte an eine konkrete Situation im Kontext XY zu erinnern, in der Ihr Verhalten erfolgreich / förderlich / hinderlich war!“)
Top Down: Indikatoren für bestimmte Merkmale müssen gefunden werden (Versuchen Sie sich bitte an eine konkrete Situation zu erinnern, in der diese Kompetenz wichtig war!)
→ Die Zuordnung von Merkmalen ←→ Indikatoren wird bei Top-Down von den Befragten vorgenommen, bei Bottom-Up kann man selber die Zuordnung  vornehmen → keine Probleme mit Doppelbelegung usw.

Q: Mit welchen Werkzeugen wird die Validität eines Indikators in der Verhaltensbeobachtung statistisch analysiert?
A: Interkorrelation von Skalen
Faktorenanalysen
Analysen ähnlich zur Kriteriumsvalidität
(Intervention zum Merkmal und schauen, ob Indikatoren noch auftreten)

Q: Wie wird die Objektivität von Indikatoren in der Verhaltensbeobachtung statistisch analysiert?
A: Berechnung der Beobachter- bzw. Beurteilerübereinstimmung

Q: Wie kann man die Objektivität von Indikatoren bei der Verhaltensbeobachtung verbessern?
A: Beobachterschulung
Beobachterfehler reduzieren (z.B. Drift)

Q: Wie wird die Reliabilität eines Indikators bei der Verhaltensbeobachtung statistisch analysiert?
A: Bei zeitlicher/situativer Stabilität: Retestreliabilität
Bestimmte Maße der Beurteilerübereinstimmung (ICC) können auch als Reliabilitätsschätzung verwendet werden

Q: Wie wird die Reliabilität eines Indikators bei der Verhaltensbeobachtung verbessert?
A: Aggregation
→ mehrere Situationen
→ verschiedene Indikatoren eines Merkmals innerhalb einer Situation

Q: Auf welche 2 Arten kann die Ausprägung eines Indikators bei der Verhaltensbeobachtung erfasst/protokolliert werden?
A: Häufigkeit/Dauer
Intensität

Q: Welche 2 Arten von Sampling werden bei der Verhaltensbeobachtung eingesetzt?
A: Event-Sampling
→ Wie oft oder wie lange insgesamt?
Time-Sampling
→ Unterteilung in gleich lange Intervalle: Wurde das Verhalten in Intervall N beobachtet?

Q: Beurteilungsregeln müssen [...] der Verhaltensbeobachtung festgelegt werden; und zwar für alle [...].
A: vor; verfügbaren Informationen

Q: Welchen 2 Schritte gibt es bei der Festlegung der Beurteilungsregeln für eine Verhaltensbeobachtung?
A: 1. Zusammenführen vieler einzelner Indikatoren zu einer Beurteilung der Merkmalsausprägung
2. Zusammenführen vieler Zielmerkmale zu einer Entscheidung

Q: Welche Modelle aus der Diagnostik können dabei helfen, Indikatorenwerte zu einer Merkmalsausprägung zu kombinieren?
A: Entscheidungsmodelle (disjunktiv, konjunktiv, kompensatorisch)

Q: Was sind verhaltensverankerte Skalen?
A: Skalen, die helfen, Merkmalsausprägungen (numerisch) aus freien Mitschriften u.ä. zu gewinnen und  (tut x gelegentlich → 1; tut x permanent → 3)

Q: Auf welche 2 Arten kann man gegen Beobachtungs- und Beurteilungsfehler vorgehen?
A: Aufklären/Informieren
Sinnvolle Gegenmaßnahmen im Design/in der Auswertung

Q: Welche Verzerrung ist bei Verhaltensbeobachtung quasi unmöglich zu eliminieren?
A: Reaktivität

Q: In welche 2 Richtungen kann Beobachterdrift funktionieren?
A: Abnehmende Genauigkeit: Ermüdung/nachlassende Aufmerksamkeit
Zunehmende Genauigkeit: Übung

Q: Wodurch kann erklärt werden, dass bei Verhaltensbeobachtungen Ratings stark unterschiedlicher Eigenschaften oft doch mittelstark zusammenhängen?
A: Haloeffekt

Q: Was sind logische Fehler in Verhaltensbeobachtungen?
A: Zur Beurteilung werden Hinweise herangezogen, die nicht passen (falsche Schlussfolgerungen)

Q: Wie kann man den Recency und Primacy Effekten bei Verhaltensbeobachtungen entgegenwirken?
A: Kontinuierliche Verhaltensaufzeichnung wenn möglich, sonst Protokollierung

Q: Welche 3 Punkte sind bei der Zusammensetzung der Beobachter einer Verhaltensbeobachtung zu beachten?
A: Sinnvolle Wahl der Beobachter: neutral, erfahren, extern
Doppelbeobachtung
Mittelung der Bewertungen (alternativ: Beobachterkonferenzen)

Q: Wann sollten Beobachter-Bewertungen gemittelt werden, wann sollte es eine Beobachterkonferenz geben?
A: Kleine Abweichungen: Mitteln
Große Abweichungen: Konferenz

Q: Was sind die 5 Anwendungsprinzipien bei Assessment-Centern? ASMET
A: Anforderungsbezug (Anforderungsprofil erstellen)
Simulation (Rollenspiele, Fallstudien)
Methodenvielfalt (Mehrere Übungen pro Merkmal)
Einsatz mehrerer Beobachter
Transparenz (Information an die Teilnehmer über die Anforderungen)

Q: Was sagt die Empirik zur Kritriumsvalidität von Assessment Centern (Schmidt-Atzert & Amelang)?
A: Durchschnittlich r > 0.3 (aber neuere Studien zeigen schlechtere Ergebnisse)

Q: Was ist "Ambulatory Assessment"?
A: Verwendung spezieller feldtauglicher Erhebungsmethoden, um
Selbstberichtdaten, Verhaltensbeobachtungsdaten, psychometrische
Verhaltensmaße, physiologische Messwerte sowie situative Bedingungen im Alltag der Untersuchten zu erfassen“ (Fahrenberg, Myrtek,
Pawlik, & Perrez; 2007)

Q: Welche 2 Paare von Beobachterfehlern laufen jeweils gegensätzlich zueinander?
A: Zentrale Tendenz vs Extremurteile
Besondere Strenge vs Milde-Effekt

Q: Welche 3 Gütekriterien für Indikatoren unterscheidet man?
A: Objektivität (Alle Beobachter verstehen das Gleiche, die Indikatoren sind verhaltensnah und konkret)
Reliabilität (Liste der Indikatoren ist von einem einzelnen Beobachter während des Zeitraums überblickbar)
Validität (Verhalten kann Zielmerkmal zugeordnet werden, Verhalten kommt in der Situation vor)

Q: 5 Eigenschaften von Indikatoren bei Verhaltensbeobachtungen? (es gibt mehr, aber die hier lernen wir für die Klausur auswendig)
A: 1. Verhalten tritt in Situation überhaupt auf
2. Lassen sich zuversichtlich von allen Rater identifizieren
3. Alle Rater verstehen unter dem Indikator das Gleiche
4. Klare zeitliche Erstreckung
5. Indikatoren decken Konstrukt in seiner Breite ab